Linux命令

推荐列表 站点导航

当前位置:首页 > 服务器技术 > Linux命令 >

用wget命令的爬虫功能抓取网页到本地文件,再用grep命令分析文件

来源:网络整理  作者:网友投稿  发布时间:2020-12-28 14:08
1.抓取网页到本地 选择一个网页,比如 http://www.oschina.net/code/snippet_1391852_26067,用wget抓取到本地。 $ wget http://www.osc...

1.抓取网页到本地

选择一个网页,比如 ,用wget抓取到本地。

$ wget

--2016-12-09 9:20:48--  

Resolving ()... 60.174.156.100

Connecting to ()|60.174.156.100|:80... connected.

HTTP request sent, awaiting response... 200 OK

Length: unspecified [text/html]

Saving to: ‘snippet_1391852_26067’

snippet_1391852_260     [ <=>                  ]  44.19K  --.-KB/s   in 0.1s   

2016-12-09 9:20:49 (314 KB/s) - ‘snippet_1391852_26067’ saved [45251]

查看:

$ ls

snippet_1391852_26067

已经抓取到本地。

 

2.在文件中查找某单词

比如查找return:

$ grep -o return snippet_1391852_26067 

return

return

return

return

return

return

return

return

return

return

return

return

 

3.输出文件中某单词个数

比如输出return的个数:

$ grep -c return snippet_1391852_26067 

相关热词:

本站内容来源于网络,如有侵权请与我们联系,我们会及时删除,我们深感抱歉!
注:本站所有信息仅供用于网络技术学习参考,学习中请遵循相关法律法规!

本文地址: https://v30.fanwenzhu.com/server/ml/10191.shtml

相关文章
Copyright © www.juheyunku.com      关于 | 合作 | 声明 | 联系 | 更新 | 地图 | Tags

用wget命令的爬虫功能抓取网页到本地文件,再用grep命令分析文件

2020-12-28 编辑:网友投稿

1.抓取网页到本地

选择一个网页,比如 ,用wget抓取到本地。

$ wget

--2016-12-09 9:20:48--  

Resolving ()... 60.174.156.100

Connecting to ()|60.174.156.100|:80... connected.

HTTP request sent, awaiting response... 200 OK

Length: unspecified [text/html]

Saving to: ‘snippet_1391852_26067’

snippet_1391852_260     [ <=>                  ]  44.19K  --.-KB/s   in 0.1s   

2016-12-09 9:20:49 (314 KB/s) - ‘snippet_1391852_26067’ saved [45251]

查看:

$ ls

snippet_1391852_26067

已经抓取到本地。

 

2.在文件中查找某单词

比如查找return:

$ grep -o return snippet_1391852_26067 

return

return

return

return

return

return

return

return

return

return

return

return

 

3.输出文件中某单词个数

比如输出return的个数:

$ grep -c return snippet_1391852_26067 

本站内容来源于网络,如有侵权请与我们联系,我们会及时删除,我们深感抱歉!
注:本站所有信息仅供学习参考!
本文地址为 https://v30.fanwenzhu.com/server/ml/10191.shtml

相关文章

风云图片

推荐阅读

返回Linux命令频道首页